Trên thế giới, đã có nhiều nghiên cứu so sánh và đánh giá về nhiều mặt của các hệ thống danh mục cũng như hệ số tác động trong đánh giá chất lượng khoa học ở nhiều lĩnh vực khác nhau. Tuy nhiên, các kết quả đều cho thấy mỗi hệ thống lại có một điểm mạnh khác nhau.[6] Ví dụ như Scopus có nhiều tạp chí ở nhiều ngành hơn nhưng độ sâu dữ liệu theo thời gian vẫn thua Web of Science hiện tại. Nhưng có vẻ họ sẽ nhanh chóng cân bằng, nhờ lợi thế đầu tư và thuật toán mạnh, cùng với quyết tâm cạnh tranh cao.[7]

Với các chính sách kích thích nghiên cứu dựa trên chỉ mục tạp chí và hệ số tác động hiện nay, cộng đồng khoa học Việt Nam sẽ dành nhiều sự chú ý tới Scopus, ISI, JIF, hay CiteScore vì nó gắn liền với các nguồn lợi chính đáng của nhà khoa học.[8] Về mặt tốt, các hệ thống thang bảng này có thể tạo ra động lực cạnh tranh và thúc đẩy các nhà nghiên cứu hướng tới các mục tiêu cao đẹp.[9] Mặt khác, nó cũng có thể dẫn tới các hành vi tiêu cực, bất chấp đạo đức khoa học để có thể đạt được mục tiêu. Hệ quả có thể là việc rút bài[10] và tệ hơn là đánh mất niềm tin của công chúng với khoa học.

Nhiều phê bình đã được thực hiện liên quan đến việc sử dụng các hệ số tác động, cả về giá trị thống kê của nó và cả ý nghĩa của nó đối với cách thức khoa học được thực hiện và đánh giá.[11]